گروه مهندسی برق

جلسه دفاع از پایان نامه کارشناسی ارشد آقای عرفان محمودیان

جلسه باعنوان ادغام تصویر مادون قرمز و مرئی به کمک یادگیری عمیق، در تاریخ شنبه 1403/06/17 برگزار می گردد.

جلسه دفاع از پایان نامه کارشناسی ارشد آقای عرفان محمودیان باعنوان ادغام تصویر مادون قرمز و مرئی به کمک یادگیری عمیق، در تاریخ شنبه 1403/06/17 ساعت 10-13 در اتاق شورای ساختمان صناعت برگزار می گردد.


استاد راهنما: آقای دکتر پیمان معلم
 
چکیده: با توجه به ظهور فناوری ادغام تصاویر، ترکیب تصاویر یکی از زمینه های تحقیقاتی مورد توجه در میان محققین میباشد که سبب میگردد اطلاعات مفید تری نسبت به هر یک از تصاویر اولیه در تصویر ادغام شده وجود داشته باشد. ادغام تصاویر مادون قرمز و مرئی به عنوان یکی از انواع ادغام محسوب میگردد که در این پژوهش به آن پرداخته شده است. اطلاعات دریافت شده توسط حسگرهای مرئی و مادون قرمز میتوانند به عنوان مکملی برای یکدیگر باشند و با ترکیب آن ها میتوان به نتایج دلخواه که شامل اهداف حرارتی قابل توجه و بافت غنی نسبت به هریک از تصاویر اولیه است، دست پیدا نمود. در این پژوهش رویکرد های مختلفی برای ادغام تصاویر بررسی شده که به دو رویکرد کلی و ترکیبی قابل تقسیم میباشد. رویکرد کلی شامل رویکردهایی همچون تبدیل چند مقیاسی، نمایش پراکنده، شبکه عصبی، زیرفضا، مدل های برجسته، یادگیری عمیق و عمومی میباشد که هرکدام شامل انواع و اقسام رویکردها بوده که در این گزارش به آن ها پرداخته شده است. با توجه به مزایا و معایب هر یک از این رویکردها، در این پژوهش رویکردهای پیشنهادی مبتنی بر یادگیری عمیق، توسط یک شبکهی متخاصم مولد با تمایزگر سهگانه برای ادغام اطلاعات حیاتی تصاویر مرئی و مادون قرمز طراحی شده است. تمایزگر سهگانه برای تشخیص اطلاعات حیاتی همچون جزئیات، شدت مناسب و اهداف تصویر مادون قرمز در تصویر تولید شده توسط مولد استفاده شده است. استخراج بافت و جزئیات با استفاده از نقشههای گرادیان انجام شده و ترکیب تطبیقی این نقشهها با کمک مکانیزم توجه و در نظر گرفتن ارتباط آنها، در حفظ جزئیات تصویر ادغامشده موثر بوده است. شدت مناسب ترکیب شده از تصاویر اولیه، به کمک مکانیزم توجه بدست آمده است. اهداف تصویر مادون قرمز توسط ماسک های بدست آمده از اختلاف تصاویر و اعمال آستانه گذاری استخراج شده است. یک چهارچوب کلی برای ادغام تصاویر مرئی و مادون قرمز پیشنهاد شده است که هر شبکهی عصبی مستقل برای ترکیب تصاویر، قابل جایگزین با مولد در ساختار شبکه است. همچنین توابع اتلاف بر اساس اطلاعات حیاتی همچون نقشه گرادیان مشترک، شدت مناسب و اهداف مادون قرمز به همراه پس زمینه تصویر مرئی تعریف شده که به حفظ اطلاعات و استحکام رویکرد در مقابل نویز کمک شده است. برای ارزیابی رویکردهای ادغام، معیارهای ارزیابی عینی همچون وفاداری اطلاعات بصری، اطلاعات متقابل، ضریب همبستگی، میانگین گرادیان، فرکانس مکانی، انحراف معیار و انتروپی بررسی شده و در جهت رفع نواقص موجود در سیستم ارزیابی، یک رویکرد پیشنهادی امتیازبندی ارائه شده است که تفاوت میان رویکردهای ادغام را باتوجه به اطلاعات مورد نظر در تصویر ادغام شده، به نحو بهتری نمایان کرده است. آزمایشهای کمّی و کیفی روی مجموعه دادهی در دسترس عموم، برتری روش ما را نسبت به روشهای پیشرفته نشان میدهد 
تاریخ:
1403/06/10
تعداد بازدید:
201
منبع:
دانشگاه اصفهان

آدرس: اصفهان، میدان آزادی، دانشگاه اصفهان،میدان خوارزمی، ابتدای بلوار سلامت، ساختمان انصاری
کدپستی: 8174673441
تلفن: 37932685 تلفکس: 36682887
راهنمای جامع تلفن های دانشگاه اصفهان

Powered by DorsaPortal